商汤绝影一手智驾一手智舱，端到端？还有AGI？｜北京车展

2024北京车展，商汤绝影首次向公众展示了，面向量产的真·端到端自动驾驶解决方案UniAD的道路测试，还带来了AI大模型座舱产品矩阵，以及全新座舱3D交互演示。

商汤科技联合创始人、首席科学家、绝影智能汽车事业群总裁王晓刚表示：“未来汽车智能化的竞争，本质上是通用人工智能技术融合应用的比拼。商汤绝影致力于成为加速智能汽车驶入AGI时代的核心技术伙伴。”

端到端自动驾驶解决方案UniAD上车首秀

此次在北京车展上，在无高精地图条件下，仅依靠视觉感知的实际道路测试成果显示，无论是复杂城市道路，还是无中线的乡村道路上，车辆能高效准确地完成包括大角度左转上桥、避让占道车辆及施工区域、绕行跑步行人等一系列高难度操作。

今年年初，特斯拉开始向部分用户推送FSD V12版本，即端到端自动驾驶方案，业内随之出现了越来越多的“端到端”智驾方案，不过大部分端到端方案采用的是感知和决策两个模型组成的 “两段式”架构，两个模型之间依然存在信息传递过滤或丢失的问题。

而UniAD表示，将感知、决策、规划等模块都整合到一个全栈Transformer端到端模型，实现感知决策一体化的真·端到端自动驾驶。

在端到端系统基础上，商汤绝影还在本次车展期间介绍了新一代自动驾驶大模型DriveAGI，推动自动驾驶从数据驱动向认知驱动发展。

“多模态场景大脑”的智能座舱

4月23日，商汤科技发布全新升级的“日日新SenseNova 5.0”大模型。6000亿参数的“日日新5.0”采用混合专家架构(MOE)，具备更强的知识、数学、推理及代码能力，成为国内首个全面对标GPT-4 Turbo的大模型。构建了以多模态场景大脑为核心的一系列全景感知、主动关怀且富有创造力的大模型座舱产品。

车辆能够准确感知并识别车外的信息，包括周围车辆的车型、标志性建筑物等，以语音、图片或者视频等方式为舱内人员提供更为准确和全面的内容，帮助用户了解和掌握外部环境信息。

AI大模型座舱产品，包括商汤“大医”医疗健康大模型为桥梁的“旅医”，基于AIGC大模型技术的“神笔”等。

人机交互方面，带来3D Gaze高精视线交互，3D 动态手势交互这两大全新座舱3D交互演示。能够通过视线定位与屏幕图标进行交互，无需点按屏幕，通过眼神即可精准控制中控图标，完成多种交互操作；3D 动态手势交互通过手势“隔空”实现各类座舱精细化的交互。

给产品提供支撑的是商汤绝影四大技术基座，SenseCore商汤大装置能够以高达12,000 petaFLOPS的算力，支持原生态大模型的高效迭代；商汤绝影为智能汽车前瞻构建了UniAD、DriveAGI以及面向座舱的多模态场景大脑等系列原生态大模型；端云协同和舱驾融合的创新软硬件架构；全栈的数据生产管线，实现大模型的高质量训练。